Neural Machine Translation via Binary Code Prediction

Posted on | Edited on | In ,

Motivation

使用binary code来编码单词有助于减少输出层的计算量(logn)。

Methods

Output Layers

输出层的设计有如下三种

其中混合型的意思为常用词使用$v’$编码，稀有词使用$q$编码（即binary code）

Models

Not Interesting

Wait for completion